WebChallenger: A Reliable and Efficient Generalist Web Agent
WebChallenger:基于结构化页面表示与分治策略的高效通用 Web Agent
🧭 Agent 架构优化 · 认知脚手架 ★ 深度解读
ML Collective · longsurf.ai · Independent
通过 PageMem 页面结构化表示与三大认知机制,用开源小模型无微调达到逼近闭源大模型的 Web 任务成功率
📌 工作参考价值(4 点)
- 结构化页面表示 PageMem 可直接复用到电商 Agent:将商品列表页拆分为导航栏、商品卡片列表、筛选面板等语义段,每段缓存摘要和交互元素,后续任务复用,大幅降低重复解析成本。
- 分治观察流水线:先让 Agent 浏览段摘要,只选择任务相关区域展开详细信息;在推荐业务中可避免把整个商品详情页 token 堆进 prompt,聚焦价格、评价、库存等关键信息。
- 离线探索 + 持久记忆:对目标网站预先遍历构建 PageMem 地图和元素行为记录,Agent 在执行任务时直接拿书签和菜单跳转信息,类似 RAG 中的预先索引;适用于长期运行的购物比价 Agent。
- 复合动作工作流:将下拉选择、表单提交等多步交互封装为单个 Agent 动作,内部自动处理局部状态变化(如菜单展开),避免每步重新观察全页;在电商搜索、下单、多轮筛选场景能显著减少决策步数和 LLM 调用